14bc561254c82a65405a535ffde06dd958fe52ec
v16
- challenge
- Passage Retrieval
- submitter
- Anna
- submitted
- 2023-01-31 12:46:32.752227 UTC
- file basename
- out
test-A / b221296c1c04cf28c2885a22353555692c6908d3
| Metric | Score |
|---|---|
| NDCG@10 | 59.76 |
dev-0 / bc382c161b02eed242819e7358d9febebc9f6136
| Metric | Score |
|---|---|
| NDCG@10 | 31.97 |
worst items
note: the gold standard is taken from the challenge| # | input | expected output | actual output | test-A NDCG@10 |
|---|---|---|---|---|
| 1 | wiki-trivia W którym państwie leży Bombaj? | 42609-0 2856658-0 119428-0 | 3366912-0 110626-0 561684-5 2215805-0 2005842-2 640307-0 1831071-0 255996-0 75124-22 905341-0 | 0.00 |
| 2 | wiki-trivia Co budował w Egipcie inżynier Tarkowski, ojciec Stasia z powieści „W pustyni i w puszczy”? | 934126-1 88267-17 | 1775405-2 664688-3 750315-0 934126-0 664688-1 21753-5 1775405-4 934126-4 162084-10 41896-2 | 0.00 |
| 3 | wiki-trivia Do którego państwa należą wyspy Rodos i Korfu? | 1743-6 | 101527-1 109175-0 552904-0 2005270-0 4304342-6 3584220-0 3572733-0 49762-0 3962344-0 1929638-1 | 0.00 |
| 4 | wiki-trivia Na którym kontynencie leży Gabon? | 74511-0 74511-42 74511-71 74511-93 | 148742-1 110626-0 156-4 508786-1 297216-8 169557-5 169557-2 726092-1 416391-1 1712719-3 | 0.00 |
| 5 | wiki-trivia Jak nazywa się polski okręt bojowy, którym brał udział w II wojnie światowej, a od 40 lat znajduje się w Gdyni? | 4360-0 1932-49 4359-71 387651-2 | 1492531-1 4978480-17 289910-0 3839179-0 14103-0 1799769-22 2400947-0 1142726-37 3643784-0 3481971-1 | 0.00 |
| 6 | wiki-trivia Mecenasem którego wielkiego kompozytora był król bawarski Ludwik II? | 58136-8 162129-3 | 181284-0 181282-7 2077252-2 3710137-7 51116-0 4096279-0 4083243-0 162129-4 37916-0 11289-3 | 0.00 |
| 7 | wiki-trivia Jakiego obrazu dotyczy akcja filmu Vinci? | 159017-5 89983-8 170281-11 764160-22 | 1004592-1 1004592-0 764160-15 3128880-1 489854-0 225555-0 1152851-0 764160-25 779791-2 1159344-0 | 0.00 |
| 8 | wiki-trivia Która zupa jest symbolem rzeczy bardzo taniej? | 2137401-4 | 3311571-3 1589274-4 294998-0 8914-1 299223-2 450522-3 23224-18 1395601-0 1048369-6 1149496-2 | 0.00 |
| 9 | wiki-trivia Jak nazywa się najwyższy masyw górski Sudetów? | 9879-0 | 108372-0 5465-8 5465-10 547665-0 453381-20 5465-0 11569-0 90478-1 1277934-0 4267890-31 | 0.00 |
| 10 | wiki-trivia Jak nazywa się wędzony ser owczy produkowany w Tatrach? | 13012-0 13016-0 13015-0 13005-2 613908-4 | 354435-4 73042-0 937406-0 3317324-0 76591-0 2784587-0 3505140-0 2616342-0 1027767-0 1948222-0 | 0.00 |
| 11 | wiki-trivia Proszę podać polską nazwę pierwiastka o łacińskiej nazwie sulfur. | 5581-35 685902-0 | 113882-4 113874-4 27673-3 113879-4 3954813-23 136382-5 1893165-2 6728-7 4872-1 1383160-2 | 0.00 |
| 12 | wiki-trivia Jak nazywają się dwie liczby rzeczywiste, których wynik po dodaniu wynosi zero? | 736338-0 | 917904-18 30332-19 6171-18 513522-0 6084-2 1856051-1 41147-0 3289-16 984042-5 1864772-3 | 0.00 |
| 13 | wiki-trivia Jak z łaciny nazywa się ćwiczenie ortograficzne polegające na zapisywaniu tekstu? | 962835-0 | 18446-32 3990518-1 5190029-481 4700256-2 21547-14 221655-6 2396985-2 102637-1 1848206-24 692347-0 | 0.00 |
| 14 | wiki-trivia W którym roku odbyła się pierwsza próba jądrowa? | 2312943-3 274961-0 1937784-0 1756259-2 4057-3 | 129691-93 638279-3 80936-12 2399186-3 1937854-0 2454429-1 896549-2 7751-25 7293-30 3873232-0 | 0.00 |
| 15 | wiki-trivia Jak nazywa się autobus elektryczny zasilany z sieci zawieszonej nad drogą? | 65401-0 | 4635429-0 45745-0 802949-47 65401-1 1797224-0 448569-12 35994-24 289416-0 1271388-25 1271388-0 | 0.00 |
| 16 | wiki-trivia W którym państwie leżą tzw. Alpy Transylwańskie, czyli Karpaty Południowe? | 172832-0 1662028-0 1065819-0 1263801-11 1653912-0 | 2174186-2 456762-2 2789510-3 1263801-3 1263801-7 1676730-0 1834305-0 743905-1 1970120-20 158645-2 | 0.00 |
| 17 | wiki-trivia Jak nazywała się polska organizacja wojskowa, której dowódcami byli generałowie Grot, Bór, Niedźwiadek? | 733800-15 8777-0 27400-0 | 1005884-9 306960-47 563600-11 245782-0 2900593-1 1826272-186 104191-1 2743250-0 245782-3 458774-5 | 0.00 |
| 18 | wiki-trivia W którym wieku żył Karol Darwin? | 44869-0 1142-4 7395-26 7828-34 | 1495894-7 26966-4 332877-0 1023740-0 1103313-5 878358-0 1673955-1 58853-2 44869-147 1475987-3 | 0.00 |
| 19 | wiki-trivia Kto napisał „Ziemię obiecaną” oraz „Chłopów”? | 491777-0 503711-0 6624-9 503711-67 | 3740698-27 2599243-1 1779092-0 746926-74 937744-20 6624-14 6624-11 89155-0 503711-1 503711-3 | 0.00 |
| 20 | wiki-trivia Który car rosyjski wprowadził grażdankę? | 129904-0 908-2 22313-16 2854198-24 2705-7 | 603627-2 692-26 997380-0 8786-6 7380-1 2064866-14 8786-9 39897-9 63618-0 2616468-2 | 0.00 |
| 21 | wiki-trivia Jak nazywała się akcja przesiedlenia Ukraińców z 1947 r.? | 20338-0 785771-2 20297-4 929707-2 968749-0 | 1326878-16 76561-23 20338-18 381998-21 1552826-228 91329-159 875057-0 371969-11 76561-21 1244780-20 | 0.00 |
| 22 | wiki-trivia Jakim skrótem literowym oznacza się osobę o nieustalonej tożsamości? | 938989-0 57033-0 4162956-0 1249108-11 | 1919191-28 1249108-5 2239844-21 4450256-0 644625-23 316692-1 172733-38 6090-21 108880-8 3385785-0 | 0.00 |
| 23 | wiki-trivia Czy legalny syn Napoleona zasiadł na tronie Francji? | 425167-2 | 390349-0 1658867-146 425167-7 395316-0 425167-1 1818942-5 420939-0 423792-21 314765-5 2807644-19 | 0.00 |
| 24 | wiki-trivia Jaki był najwyższy nominał obecny w obiegu przed denominacją w 1995 roku? | 2148595-1 | 2048728-5 4099215-4 4498934-4 1497709-2 1695909-3 1695909-9 3998572-13 1163879-5 2656430-4 2461641-29 | 0.00 |
| 25 | wiki-trivia Jak nazywa się postulat mówiący, że w atomie nie ma dwóch elektronów które by miały identyczne wszystkie cztery liczby kwantowe?… | 43681-0 | 984901-17 2311468-1 1996923-0 44393-9 6567-1 1324757-51 43683-10 143094-19 43683-6 8807-0 | 0.00 |
| 26 | wiki-trivia Który amerykański prezydent uczestniczył w konferencji pokojowej w Jałcie? | 25733-0 2261468-0 | 1197116-6 1219607-4 10381-13 87671-19 275539-0 3538138-40 317788-1 308840-5 177381-117 1108611-1 | 0.00 |
| 27 | wiki-trivia Jak miał na imię Makuszyński? | 49827-0 49827-8 49827-14 1509748-0 12060-7 | 3491498-17 755721-27 878306-2 431500-8 1290019-7 1912083-3 2097770-1 2227036-14 5125450-15 415829-2 | 0.00 |
| 28 | wiki-trivia Na cześć kogo obchodzony jest dzień Kotana? | 44879-8 174481-12 86849-16 | 2706007-2 288207-10 2605129-9 3243471-12 2077-13 4478120-3 184952-0 2320553-11 2283748-3 34201-19 | 0.00 |
| 29 | wiki-trivia Jaką nazwę noszą połączone izby Sejmu i Senatu RP? | 2462290-5 589110-0 33023-0 189807-44 3039370-2 | 59425-0 8653-3 9445-1 189807-29 2797003-0 115492-7 25362-89 5246661-3 3065167-8 5754-14 | 0.00 |
| 30 | wiki-trivia Jak nazywa się na statku oficer zajmujący się sprawami gospodarczymi? | 558647-0 558647-1 | 391783-28 1322911-1 470606-7 17414-0 523776-3 3124459-2 2371997-0 4570607-2 25039-69 560272-10 | 0.00 |
| 31 | wiki-trivia W którym roku Otton III i Bolesław Chrobry spotkali się na zjeździe gnieźnieńskim? | 2048803-0 1930212-0 8196-0 44843-1 411720-13 | 438857-4 1930212-3 1918-22 913829-7 178262-4 1643289-4 923581-16 276455-1 1876386-10 626730-43 | 0.00 |
| 32 | wiki-trivia Z repertuaru którego zespołu pochodzi utwór „Jestem z miasta”? | 1642348-0 741949-0 204472-3 3208891-8 | 1642348-2 1543428-1 3704391-8 1159288-1 803306-1 1892721-1 2533878-0 3264724-2 974175-3 1010645-0 | 0.00 |
| 33 | wiki-trivia Jak miała na imię żona Heraklesa? | 3136602-0 39725-0 11468-0 11468-22 39725-2 | 12500-0 204427-2 553468-0 1006997-1 1457802-2 4528710-0 4075888-1 12500-15 163063-1 4528681-0 | 0.00 |
| 34 | wiki-trivia Jakie zwierzę widnieje w godle Wenecji? | 3517-75 517835-1 996055-5 | 2378349-2 2319571-3 163423-4 170281-3 76262-5 562507-0 925742-1 3118886-36 602381-3 711024-2 | 0.00 |
| 35 | wiki-trivia Jak nazywa się instrument muzyczny i ogon cietrzewia? | 445920-18 | 51223-9 2385416-2 51223-8 51223-10 129761-0 116386-0 3469201-8 17012-1 17770-0 482313-14 | 0.00 |
| 36 | wiki-trivia Jedna z mitycznych gorgon oraz jamochłon morski mają wspólną nazwę? | 108851-0 108851-2 108851-4 27899-19 1877199-2 | 2025784-0 1877199-0 1156134-1 4262750-1 3247744-0 227878-0 129350-0 2727288-6 683880-0 463184-0 | 0.00 |
| 37 | wiki-trivia Na jaką chorobą zapadła Nel, bohaterka „W pustyni i w puszczy”? | 88267-8 | 41896-2 435160-0 774506-7 5016947-0 4294485-0 2482609-0 88267-19 3308639-0 664688-4 664688-0 | 0.00 |
| 38 | wiki-trivia Jak z francuskiego nazywa się pomieszczenie w teatrze, w którym widownia przebywa w trakcie przerwy? | 736692-0 | 46823-0 524484-5 3273694-8 4185956-4 63477-0 1666564-16 1340382-0 990086-5 171373-3 2641523-18 | 0.00 |
| 39 | wiki-trivia Jak nazywa się elastyczna deska umożliwiająca wybicie przy skokach do wody? | 90738-0 2996100-0 2996414-0 2066472-0 4112844-1 | 4595660-2 306214-4 1055624-3 2330285-0 536667-0 117311-0 90738-2 321629-5 893903-1 1366277-7 | 0.00 |
| 40 | wiki-trivia Jak nazywa się dwuosobowy zespół instrumentalny albo śpiewacki? | 17331-0 261983-0 989290-0 3544681-0 | 17333-0 2582959-19 428316-0 1432846-0 104615-12 44855-82 3719-17 669331-7 1666428-7 1288144-0 | 0.00 |